辽宁石油化工大学学报
  期刊
  出版年
  关键词
结果中检索 Open Search
Please wait a minute...
选择: 显示/隐藏图片
基于图卷积的3D骨架数据的双人交互行为识别
张静亭, 曹江涛, 姬晓飞
辽宁石油化工大学学报    2023, 43 (3): 86-90.   DOI: 10.12422/j.issn.1672-6952.2023.03.014
摘要141)   HTML3)    PDF (1774KB)(146)    收藏

针对图卷积神经网络的双人交互行为识别方法存在交互语义信息表达不充分的问题,提出了一种新的双人交互时空图卷积神经网络(DHI?STGCN)用于行为识别的方法。该网络包含空间子网络模块和时间子网络模块。将基于交互动作视频获取的3D骨架数据生成一种双人交互动作的空间动作图用于空间信息的表示,图中根据关节点位置信息对双人之间的连接边赋予不同的权重。时间信息处理中,在构造的邻接矩阵中增加了上下文时间信息的联系,图中关节点与其一定时间范围内的节点增加连接。将生成的时空图数据送入空间图卷积网络模块,结合时间图卷积网络模块增强帧间运动特征连续性进行时序建模。该模型充分考虑了双人交互动作的紧密关系,具有较强的鲁棒性,获得了比现有模型更好的交互动作识别效果。

图表 | 参考文献 | 相关文章 | 多维度评价